热 光 近 场 空 间 相干 性 的 多 视图 立体 成 像 及 三 维 重建 方法 
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摘 要 : 立体 视觉 是 根据 人 双眼 、 昆 虫 复眼 深度 视觉 原理 ,通过 多 个 摄像 机 从 不 同 角度 同时 获得 周围 景物 
的 多 幅 数 字 图 像 , 由 立体 匹配 技术 得 到 多 幅 图 像 上 的 对 应 点 ,并 且 由 对 应 点 的 视差 信息 重建 三 维 物体 图 像 
现 有 的 多 目 视觉 三 维 重建 和 立体 匹配 方法 的 生物 学 机 制 仍然 未 知 ,也 不 知道 人 双眼 和 昆虫 复眼 是 如 何 感 
知 深度 信息 、 进 行 快速 准确 立体 匹配 的 .通过 热 光 的 近 场 高 阶 空间 相干 性 ,研究 了 多 视图 立体 视觉 的 神经 
生物 学 机 制 ,给 出 了 双 视 图 和 多 视图 立体 视觉 的 三 维 重建 公式 .得 到 的 结果 与 视觉 神经 科学 的 理论 一 致 . 
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Abstract: Stereo vision is based on the principle of human binocular and insect compound eye depth vision, 
obtaining multiple digital images of the surrounding scene from different angles through multiple cameras, 
obtaining corresponding points on multiple images through stereo matching technology, and reconstructing 3D 
object images from the parallax information of corresponding points. The neurobiological mechanism of the 
existing Iterative reconstruction and stereo matching methods of binocular vision is still unknown, The 
neurobiological mechanism of dual view stereo vision is studied, and the Iterative reconstruction formula of dual 
view and multi view stereo vision is given. The conclusions obtained are consistent with the theory of visual 


neuroscience. 
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1 引言 

A AI Es SIS L5] d ZI JE, 88 e AW AI EA EA Fer] 30. AMA [8] — 99] ^", 获得 在 不 同 视 
角 下 的 多 幅 感知 图 像 , 然后 通过 三 维 重 建 方法 和 立体 匹配 原理 计算 多 幅 图 像 像素 间 对 应 点 
的 位 置 视差 来 重建 景物 的 立体 图 形 , 这 一 过 程 与 人 类 双眼 视觉 和 昆虫 复眼 视觉 的 立体 感知 
过 程 类 似 . 三 维 重 建 方法 有 射影 重建 、 仿 射 重建 和 欧 氏 几何 重建 等 方法 . 双眼 视差 有 以 视 网 
膜 为 中 心 的 双眼 视差 、 以 头 部 为 中 心 的 双眼 视差 和 两 个 物体 间 的 相对 视差 . 

射影 重建 有 基于 基础 矩阵 的 重建 、 基 于 双 代 数 的 重建 和 基于 三 线 约 束 关 系 的 重 
££, 0. Fa-ugeras 将 基础 矩阵 用 于 射影 重建 , Hartley 等 人 对 Faugeras 的 重建 方法 做 了 一 些 
改进 和 发 展 . G. C. Rota 等 学 者 对 19 世纪 的 双 代 数 射影 几何 重建 给 出 改进 , Carlsson 推导 了 
一 些 双 代数 形式 的 不 变量 表达 式 ,A. Shashua 利用 几何 不 变量 理论 得 到 3 幅 二 维 图 像 间 对 
应 匹配 点 坐标 的 三 线 约 束 关 系 . 
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仿 射 重建 有 基于 模 约 束 的 重建 和 基于 摄像 机 平移 运动 的 重建 , Luong 等 学 者 将 模 约 束 
的 概念 来 进行 摄像 机 自 标定 , Peter Sterm 利用 图 像 中 的 灭 点 及 模 约束 来 实现 物体 的 仿 射 
XE E, 当 摄 像 机 在 两 幅 图 像 间 平 移 运 动 时 , 两 幅 图 像 间 的 仿 射 变换 可 实现 物体 的 三 维 重建 . 

在 欧 氏 几何 下 , 三 维 重建 的 一 般 方法 是 在 左右 摄像 机 内 外 参数 已 知 时 , 计算 出 空间 直线 
重组 三 维 面 、 二 次 曲面 , 然后 重建 出 三 维 物体 立体 图 像 . 当 左 摄像 机 坐标 系 和 右 摄 像 机 坐标 
系 平行 时 , 可 以 通过 立体 成 像 几 何 法 得 到 三 维 重 建 公 式 . 一 般 情形 下 二 维 成 像 图 像 和 三 维 场 
景 之 间 存 在 着 投影 关系 , 这 种 投影 关系 是 摄像 机 的 投影 矩阵 , 可 以 通过 左右 两 幅 图 像 上 少量 
的 对 应 点 信息 来 恢复 投影 矩阵 , 由 左右 双 摄 像 机 投影 矩阵 , 利用 最 小 二 乘法 得 到 精度 比较 高 
的 图 像 上 每 一 点 的 深度 信息 , 从 而 重建 物体 的 三 维 图 像 . 

复眼 多 目 视 觉 由 多 视图 几何 的 多 视图 张 量 ", 产生 多 幅 图 像 测量 坐标 的 多 重 线性 关系 ， 
每 幅 图 像 的 摄像 机 矩阵 从 张 量 计算 得 到 , 三 维 立体 图 像 可 以 由 恢复 的 摄像 机 和 多 幅 图 像 上 
的 对 应 点 视差 计算 得 到 . 

人 类 立体 视觉 系统 通过 双眼 视差 感知 三 维 信息 , 文献 [6, 7, 8] 中 描述 了 双眼 视差 的 基本 


原理 和 类 型 . 如 图 1 所 示 , 以 视网膜 为 中 心 的 双眼 视差 是 物体 4 为 ai — ar, WEB N b: — 


以 头 部 为 中 心 的 双眼 视差 是 物体 4 为 (az 十 7z) 一 (az 十 7a), 物体 B 为 (Bi 十 i) 一 (Ba 十 ya), 物 


KA. B 的 双眼 相对 视差 都 是 (a: —ar)— (br — Br). 


物体 A 


图 1 视网膜 视差 和 以 头 为 中 心 的 视差 图 图 2 HBT 干涉 仪 

人 双眼 的 立体 匹配 在 观看 场景 物体 的 同时 自然 发 生 的 , 但 双 目 视觉 与 人 双眼 不 同 , 需要 
经 过 专门 的 立体 匹配 方法 才能 得 到 左右 两 幅 图 像 上 的 对 应 点 . 目前 为 止 还 没有 学 者 运用 量 
子 光 学 的 热 光 近 场 二 阶 相干 性 来 研究 双眼 立体 视觉 的 感知 机 制 . 

文 南 献 [9, 10, 11] 详细 介绍 了 热 光 近 场 的 一 阶 相干 性 、 二 阶 相干 性 、 高 阶 相干 性 和 量子 


成 像 , REREH B] MAF ER C PO (d, ti ds, t2) 2 EH PI 2G DU i 7 E E Re (ds) 和 


(32,t2) 的 光 场 E(3;,t;) 作 直接 符合 测量 , 如 图 2 所 示 的 HBT PHA”, 由 放 在 小 孔 后 面 的 两 


台独 立 光 探测 器 对 发 生 在 时 空 点 (于 坟 ) 和 (2; 刀 ) 处 的 两 个 不 同 的 事件 做 联合 观测 , 图 2 中 的 
观测 是 基于 电学 的 线性 乘法 器 处 的 联合 电流 : 


&(t)is(t)ocDhi(d1,t:) D5(d2,t2) - E* (d, 68) E(di th) E" (do, t5) E(do;t;). 
二 阶 相干 函数 Te) 与 一 阶 相干 函数 TH TD RIT E DO? TDP Ti). N 阶 相干 
函数 是 : 


TU?(d,, uzn) = QE* (d, 2) E(qi, 24) E* (qa, zo) E (2,22) E" (d, z,) E(d,,2.)). 


Wt Oi yis 2) IC ER £, 0,(z,,y,,z,) 是 右 摄 像 机 坐标 系 , Osl Tu, Yuzu) AE H fL AA 


标 系 , B. PAP, ym) — Ab AO. OTIO, HP ES pi. 通过 图 像 特征 点 匹配 、 对 极 几何 
恢复 、 黎 玻 匹 配 和 稠密 匹配 、 局 部 匹配 和 全 局 匹配 等 立体 匹配 方法 , 找到 左边 图 像 和 右边 
图 像 上 的 对 应 点 zw 和 zw 到 目前 为 止 , 双眼 立体 视觉 和 实时 立体 匹配 方法 的 生物 学 机 制 和 


里 论 模 型 仍然 未 知 . 
文中 将 两 个 独立 的 联合 二 阶 相干 测量 变 成 双 目 成 像 系统 的 联合 符合 测量 , 则 二 阶 相 干 


函数 TO 测量 的 结果 就 是 双 目 视觉 的 立体 成 像 . 本 文 得 到 的 主要 结果 是 : 
(1)、 根 据 三 角 测量 原理 得 到 双 目 视图 立体 视觉 成 像 的 三 维 重建 公式 : 


VS 1 Qua F Qor | [ 1 La tar 
fue 2 is m 2 7 出 


VH 


Kim, m, -m= in de — (ta bol gps e dn del 是 报 像 机 成 像 系统 的 放大 


XE, da. Coe DIEA ARAILE TE TTA n rR JF 6 E BL IR] t, 3 一 3 是 以 视网膜 为 中 
心 的 双眼 视差 ， 
(du — £a) — (do. — tar) 4E AKARJ rr ORIIRE. 


(2). WIV| PELA br T Xe G —G(V,E) B ex E, 其 中 站、 五 分 别 是 G BT ER 


集 、 边 集 , qu t u(u € VERBERE, 则 多 目 视 图 立体 视觉 成 像 的 三 维 重 建 公式 为 : 


p,— 1 dw T Que | (Mma — 1) tau mali tu I (2) 
| 如 | (u,u)€ E Mau T m, m, T My 


RE t Bulu e V) BUBBLE TA y # rB BROTHER EL In] TS, m 是 第 wu 个 摄像 机 的 放大 


x 
(3) 、 根 据 热 光 的 近 场 二 阶 空间 相干 性 得 到 双 视图 立体 成 像 的 三 维 重建 公式 : 


> > i (aP bp Rw Qai t Que 
PP Gaited O S ai rti som (Eg e Sr som (Bl) (3) 
obj 


其 中 somb(z)= 228) ，7i(z) 是 一 阶 贝 赛 尔 函 数 , % 是 物体 和 成 像 透镜 间 的 距离 , + oO 
镜 和 像 平 面 间 的 距离 , R 是 成 像 透镜 半径 , 4(5) 是 物体 光 场 的 分 布 函 数 , m — RERA 
的 放大 率 , [d.a 一 zu 为 双眼 视差 


ID. 、 设 IJ 个 光 探 测 器 分 别 位 于 连通 图 G=G(w 同 的 节点 上 , 其 中 VV、B 分 别 是 G 的 节 


点 集 、 边 集 , UCV, G, —G(V 一 U,Bo) 是 节点 集 为 V — U JG 的 子 图 , TEG P BER FOE SS 


点 , Æ Gr AIOLI A, 则 将 这 个 节点 加 入 到 把 中 , 重新 得 到 的 子 图 就 没有 扳 立 节点 . 假设 | 


个 成 像 系统 的 各 个 参数 都 相同 , 任意 的 节点 w、weyV， 


Sou = Sov — So, Siu = Sio = Sm, =m,=m,f,= fo 5 fuz, =z,=d. 根据 热 光 的 近 场 |VI 阶 空间 相干 性 


得 到 多 视图 立体 成 像 的 三 维 重建 公式 
_ _ 二 ize (Rs e) Rus dut dw 
Guiu) 2, lH le™ dis tdem ove al 
CV (u,v)€ Ey 
Ru A — 
X somb (7 [uu duw|)| |: (4) 


(5)、(1) 式 和 (3) 式 , (2) 式 和 (4) 式 的 三 维 重 建 公式 分 别 相 似 , 表明 人 双眼 和 昆虫 复眼 
感知 到 立体 成 像 是 视觉 神经 系统 中 的 对 双眼 和 复眼 都 有 感知 的 眼 优 势 细 胞 对 多 个 视网膜 上 


的 多 视图 成 像 对 应 点 进行 热 光 近 场 |VI 阶 相干 测量 的 结果 . 测量 热 光 二 阶 相干 性 的 干涉 仪 将 


左右 两 幅 图 像 进 行 深度 融合 感知 , 测量 热 光 二 阶 空间 相干 性 的 立体 成 像 过 程 的 同时 就 自动 
完成 了 双眼 对 应 点 的 立体 匹配 . 


2 双 目 视觉 及 多 目 视 党 成 像 的 三 维 重 建 公式 
三 角形 测量 原理 如 图 3 所 示 “, 摄像 机 坐标 系 是 (zye,z)， 成 像 平 面 是 zx = f.. W 


d. — (u,v,w)" ÆR FELE A, B=(z。,y。,ze) 是 空间 中 的 任 一 点 , 由 三 角形 相似 原理 有 : 


5 sp se ra 
c Ze Ze 


设 m=, m EREKE, NE: 


Te c c => =a 
(u,u,t) =( J t Í (a, 2.) q, = mE. (5) 
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右 成 像 平面 


图 4 汇聚 式 光 轴 双 目 成 像 几 何 原 理 图 
双 目 汇聚 式 光 轴 立 体 成 像 几何 原理 如 图 4 所 示 , 三 个 坐标 系 O1( zi,yi,21)、 


3 三 角形 测量 原理 图 


O,(Er;Yr2r)> Oulu, Yus Zu) ZF HAERA Heze : 
P,— RP, + fu —R(P,— t), P. = R. P, T £, = R. (P, tur). (6) 
HoBR, R, ÆR R Z E ERR EE. 


公式 (5) 和 (6) 得 : qi = 


> 


所 以 有 : Ri( Gu — fue m, Rı( Po — 


RAR, SEE n] BE, TE f du — £a m(P,— fu), du — t, =m, (Po — tu), ft: 


rid du F Qur —1 E LA 
忆 = Q wi q | ( Jta (m, L) tar (7) 
Try, T M, mı T M, 


Qui + (m, m 1) Li Z Dm + (m, m 1) ius 
mi m, i 


(8) 


当 左 右 摄像 机 的 放大 率 m — m, = m B, 由 (7) 式 得 : 


> b y E —1,2 > H2 
P, = 35 (do | dur) | m (tua | tur), 于 是 E EP 公式 (1), JF HAB: 
m (Eur — fa Qur (La [NS 或 者 (1 一 m)(t, 一 L) = Qa — Gur. 


个 等 式 两 边 取向 量 的 长 度 得 : 
Gu m wr ho S du — us 
m= lin (ç D 或者 m 二 1 二 in del 2 | 
[tw — fas] [2 mm 


根据 双眼 视差 的 定义 ”和 图 1、 图 4 可知, (q. — £u) — (du — tw) 是 以 头 部 为 中 心 的 


设 |V| 个 摄像 机 分 别 位 于 连通 图 G 二 G(V,E) 的 节点 上 , Xv. EZ EG 的 节点 集 、 


一 


边 集 . 对 于 多 目 立体 视觉 ,第 w(weV) 个 摄像 机 几何 模型 是 一 tw 二 ms(P, 一 tw), 对 于 任 


意 节 点 ueV ,由 于 G 久 一 t tw = m,( Les an 任 一 边 (u,v)e E , 将 相 邻 节点 上 的 摄像 机 模型 


相 加 得 : dus | do, um L = me(B,— tau) tm, (P, — £u 解 得 : 


Q wu Q wv | On — 1) f.m bi 
P (u,v) | 
Tr, T My Mau My 
] dos tm dus tw £ 个 Z ¿ AM, 
i cu — = du To KEEA P... BUE e A kina = 
维 重建 公式 (2). 


3 热 光 的 近 场 高 阶 空间 相干 性 的 三 维 重建 公式 
热 光 近 场 的 经 典 成 像 系 统 如 图 5 所 示 “, 像 平面 上 的 光 场 是 : 


E(gd;,z;,t) = [56s =0,to =0)g (k, w; q; z; t) dudk. (9) 


5 量子 光学 的 成 像 系统 图 6 双 目 视觉 的 热 光 近 场 二 阶 相干 性 立体 测量 图 
成 像 系 统 的 格林 函数 是 : g (E, d 2 — s, + si) 


-faf auat tens i4 23) eni. -HH e-a an) 
A S CARERE UIN 
3i HS DN T (高 斯 函数 ), 。 是 物体 和 成 像 透镜 间 的 距离 , 。 是 成 像 透镜 和 像 平面 间 的 


, 4A (3) 是 物体 上 光 场 的 分 布 函数 . 


利用 高 


斯 函数 的 性 质 , 上 式 简 化 为 下 述 SEX: 
g(K,u;d;,2—5 F 5;) 


Gil E) | 43.4 G1) 68.1 2) * 
xf eue ti-i ttm (10) 
对 于 半径 为 尺 的 有 限 尺寸 透镜 , 上 式 中 的 第 二 个 重 积分 简化 得 到 该 成 像 系统 的 点 扩展 
函数 : 
f aita, + 一] somb (Egg, e ay, 
LH somb (z) 一 Anz) ; Ji(z) 是 一 阶 贝 赛 尔 函 数 , m = 
——— E: 


(11) 
成 像 系统 的 放大 率 


TO)(qi,zu; qa, Zo 1) 3 X ZI Gsn)E (42,22) + Ei( di, 23) E;(d2,22)]] 
j 1 
AT » E » 3 
= f aidia g(du zi k1) g ($2,22, k ) +g (qo, zo, )g(qu z, k2)]| 


> L 2 
1 
J dalo ioak) J iiaa Gak )| af aa di zu k)g(da,zs,k)| 


—Drü(d,z)r $9 (2,22) TIG (quz; d2,22) 
将 


(12) 
FB Rs (q — 55 — faga Ge e 


”代入 上 式 得 到 一 阶 空 
间 相 干 函数 TDT 多 一 常数 , TO (dnd = u (di, zo) 9 (da zo, K). [B A2(4.)— W E, 
Z= z =d, 则 得 到 : 
Tí? (di dz)xe EC f'ag, ang T 
ø 


- T . Qu 一 
Zi) t -izg li] 
e c e 2cd 


— [ds?) 
如 图 6 所 示 , 将 HBT 干 涉 仪 在 在 两 个 独立 观测 
成 像 系统 的 联合 洲 


mb (T [gs — dl) 
MEI Ex (d.t) PH Gunt) FR S UI CAS JJ ATI 
测量 , HBT Tp DUSIUAE RAA H MURS FO Sr P CRGO e 

左右 摄像 机 成 像 高 斯 透镜 公式 二 十 二 一 下, 

入 到 (12) 式 得 


(I,ry, 将 成 像 系 统 的 格林 函数 (10) 式 代 
工 (oni Qa Z j= | | akg" Gas Ba (Fa)| 
7 lcs So1 Sj | 


k (sasa) 


"m w T > wW -ik Ga 
G (lal, Lyf 4344896 (dal, TE 
w,l I 1 
x anean A 
lens, 


Je £e (in de. d, 
Sil h 


= w? i (sort sir) zx (CU E 一 > e ik Gor 
"Gu eat Oeh e], AEG do za) 


x [ siet er eoe e m 
设 左右 成 像 系 统 的 物体 上 光 场 分 布 相同 ，4(5) - A(4,) - AQ), T: 


1)(2 3 wt 1 .. 
rg (duis zi dur) = Irc 8,185, Sj] S id 
ott ort r 


tg (Idul; = 5 Gs. - s) 


dq, A G* , G o° d4,G*||q,|, < ! 
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上 式 进 一 步 再 简化 ， Y s Sor So, Sj Sir Si, Mı m, m, f, f. fs 则 有 : 


Tf? Ge) gg el EC ieh 2) | dd, G) 


dui 


1 1 i PIC EE Y d, 


- ww ul 
xf aucti EG ope 


-7 do. - unstos 
1 1 1 “kas Ca CF z 2): @; 2 


e" >j W | 
xf ai etit C 5 | S; ni 
E NOS 
"Vase sis DN 


= ZS p Ubsd. d 
xf uet (+i Lye 


2 na 9,11 — dcum, 
xf ai eti. E+- 2. 
do Qur PA ds pm m4 — — 一 qr 一 Gu =$ 
由 于 ( | qi iig | a d= z lio (di — d1)4 "t qi - ài] 


"— PEÉENEUT- TATE 
f aeih S(T + bye J aqe, (+E ple 


uo uis sn i RI ced gos e de GER) 
= f d(d,—d,)e ^ ai f f d(d;, td)e ° 
lens J lens, — 1 | | | Y lens:y lens, 


所 以 得 到 热 光 近 场 一 阶 相干 函数 的 三 维 重建 公式 (3)， 
在 一 阶 相干 函数 TI 式 中 ,更 = 一 巨 , 扩 展 函数 somi( 院 包 18 十 57 p 中 有 世界 坐标 


系 中 的 向 量 ,扩展 函数 somb C ne Gur) 包括 两 幅 图 像 上 对 应 点 6、3 的 视差 信息 . 
J 对 双 目 视觉 ette 图 像 进行 联合 符合 测量 , 重建 物体 的 三 维 图 形 , 并 且 扩 
展 函 数 somb ( aum Gurl) 对 左右 两 幅 图 像 对 应 点 同时 进行 了 实时 立体 匹配 . 


W | 个 光 探 测 器 分 别 位 于 连通 图 G 一 G(V, 轧 的 节点 上 , 将 HBT 干 涉 仪 在 |VI 个 独立 观测 


点 (wsts)(weV) 联 合 测量 变 为 IV| 个 成 像 系统 的 联合 测量 , 8BT 干 涉 仪 就 变 成 多 目 视 觉 的 立 


体 成 像 测量 , 热 光 的 近 场 |V| 阶 空间 相干 函数 “是: 


DUC, 2, Gv sv) = (E* (di 2) E (1,21) E* (G2,22) E (2,22) E* (d, 2,) E(d,,2,)) 
~ 1 ... i 
uM Jy 2. (Ea Be Bs ) $ 
文献 [9] 中 测量 了 热 光 的 非 平 庸 三 阶 相干 函数 , 并 且 有 一 系列 不 寻常 和 有 趣 的 性 质 , 实验 
结果 和 理论 模拟 的 结果 在 统计 误差 范围 内 符合 得 很 好 , 用 类 似 的 方法 也 可 以 对 于 |V| 个 成 像 


系统 的 高 阶 相干 性 进行 实验 检验 其 正确 性 . 设 第 w 个 成 像 系统 的 格林 函数 是 : 
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成 像 系统 的 放大 率 . 
对 于 连通 图 G 一 G(V,B), 由 文献 [9j 的 三 阶 空 间 相 干 函数 得 到 热 光 的 近 场 |V| 阶 空间 相干 函 
数 : 
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所 以 得 到 多 视图 立体 成 像 的 三 维 重 建 公式 (A). 
4 双 目 立体 视觉 热 光 的 近 场 二 阶 相干 性 机 制 


双 目 立体 视觉 是 由 于 物体 在 双眼 成 像 的 水 平视 差 ,相对 于 头 部 ,两 只 眼 对 场景 中 物体 的 
感知 是 治 着 相同 的 头 位 中 心 视觉 方向 ,就 相当 于 从 两 眼中 间 的 “中 央 眼 ?看 外 物 ,两 眼 的 视觉 
中 心 方向 形成 一 个 共同 的 视觉 方向 即 两 眼 的 平均 方向 外 .文中 得 的 三 维 重建 公式 (1) 和 (3) 中 


也 恰好 包含 两 眼 成 像 平面 上 平均 的 中 心 坐标 97 e ,与 视觉 神经 科学 理论 相 一 致 


人 类 视觉 系统 有 Vl. V2 等 视觉 皮层 Pu20, vi 层 不 同 区 域 第 4C 层 细胞 接受 来 自 外 
膝 状 体 的 单 侧 和 对 侧 单 眼 信 息 输 入 ,在 随后 的 其 他 层 中 双眼 信息 有 不 同 程度 的 汇聚 ,第 4C 
层 以 外 的 细胞 80% 以 上 为 双眼 驱动 .次 级 视 皮质 V2 区 紧邻 V1 并 接收 其 有 序 投射 . V2 区 的 
大 部 分 受 双 有 眼 驱 动 的 视差 细胞 参与 立体 视觉 信息 处 理 .双眼 驱动 型 细胞 在 左 、 右 眼 各 有 
个 相对 应 的 感受 时 ,两 侧 感 受 野 处 于 两 侧 视 野 相 对 应 的 空间 位 置 上 ,两 侧 感 受 野 具有 相似 的 
时 空 特征 ,多 数 细胞 对 两 侧 感 受 时 的 空间 视差 非常 敏感 ,所 以 双眼 驱动 型 细胞 就 相当 于 热 光 
的 近 场 二 阶 相干 性 测量 的 联合 符合 测量 电路 . 
中 央 眼 立体 感知 如 图 7 所 示 ” 的 随机 点 立体 图 (Wandel11, 1995 年 ;Juksz, 1964 年 ), 是 
一 个 由 一 只 眼睛 观看 的 随机 点 图 案 , 另 一 只 眼睛 的 刺激 是 通过 复制 第 一 张 图 像 , 水 平移 动 一 
个 特定 的 区 域 , 然后 用 随机 的 点 样本 填充 空隙 来 产生 的 . 当 双 眼 同 时 但 独立 地 观看 左右 图 像 
时 (通过 使 用 立体 镜 或 通过 立体 匹配 会 聚 或 发 散 眼 睛 来 融合 图 像 ) 移 位 区 域 ( 正 方形 ) 的 平面 
看 起 来 向 上 凸 起 , 大 脑 感知 到 深度 信息 . 双眼 以 外 还 有 第 三 只 中 央 眼 感知 到 立体 图 像 , 随机 
点 图 毫 无 意义 , 双眼 仅仅 通过 视差 信息 就 能 感知 到 深度 信息 . 光 的 近 场 二 阶 干 性 测量 也 只 
n s 图 像 的 立体 匹配 的 对 应 信息 就 能 形成 立体 图 像 , 联合 测量 的 HBT 干涉 仪 就 是 
“中 央 眼 ”. 
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所 以 大 脑 视觉 系统 的 双眼 立体 感知 是 左右 眼 两 个 感光 观测 细胞 对 物体 光 场 进行 二 阶 相 干 
性 测量 , 本 节 中 关于 视觉 神经 科学 的 理论 知识 为 文中 的 (1) 式 和 (3) 式 提供 了 神经 科学 基础 . 
5 结论 

本 文 得 到 多 目 视觉 的 几何 学 三 维 重建 方法 , 由 热 光 的 近 场 高 阶 相干 性 测量 得 到 立体 成 
像 的 扩展 函数 三 维 重建 公式 , 并 且 在 高 阶 相 干 性 测量 的 同时 就 自然 完成 了 实时 立体 匹配 . 两 
种 三 维 重建 方法 类 似 , 有 充分 的 视觉 神经 科学 基础 . 
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